Tại miền Bắc xa xôi của Đế quốc, Ludwig đã tích cực hoạt động hơn những người tiền nhiệm trước đó.[34] Sau khi nhà Askanier bị tuyệt chủng 1319, ông đã đưa trong tháng 4 năm 1323 con trai dưới tuổi vị thành niên của mình, Ludwig V vào danh sách các bá tước Brandenburg. Berthold VII. von Henneberg-Schleusingen người giám hộ Ludwig V nhận được nhiều ưu đãi và nhiều tự do và sẽ tạo thành một đối trọng với nhà Luxemburger.[35] Brandenburg đã bỏ phiếu cho nhà Wittelsbach bên cạnh Kurpfalz. Cả vua Bohemia Johann cũng đòi quyền cai trị Brandenburg. Ông ta muốn được lãnh thổ này coi như bồi thường cho việc từ bỏ ngai vàng La Mã Thần thánh, nhưng chỉ nhận được Altmark, Lausitz và Bautzen. Ludwig can thiệp tại Brandenburg làm cho quan hệ với Johann trở nên ghẻ lạnh lâu dài.[36] Hoàng đế hoạch định chủ yếu để làm vững chắc đế quốc, sau đó mới tới vấn đề mở rộng quyền lực nhà Wittelsbach. Ông muốn ngăn chặn nhà Luxemburg gia tăng quyền lực và do đó ngăn chặn một thế lực đế quốc song song.[37] Ludwig bảo đảm việc tiếp nhận Brandenburg qua thỏa thuận hôn nhân. Ludwig der Brandenburger, tên gọi của ông sau này, đã kết hôn vào tháng 11 năm 1324 với con gái của hoàng gia Đan Mạch Margaret. Ngoài ra, Ludwig cũng đã can thiệp vào lãnh thổ Thüringen-Meissen. Nhà Wettiner với bá tước Meissen và bá tước Thüringen được liên kết chặt chẽ với nhà Wittelsbach và vương quốc. Con gái cả của Ludwig, Matilda đã kết hôn với Friedrich II của Meissen. Nhờ vậy Ludwig ngăn cản một liên kết chặt chẽ giữa Bohemia và hầu quốc Meissen lân cận. Trong trường hợp con trai ông chết, Ludwig quyết định 1327 rằng con rể ông, Friedrich nên kế thừa Mark Brandenburg. Trong cùng năm Ludwig der Brandenburger được cấp văn kiện giao lãnh thổ.[38]

1324 tới việc liên kết triều đại với Hà Lan-Hennegau. Ludwig cưới người vợ thứ hai là bà Margaret, con gái cả của Bá tước Wilhelm III của Hà Lan-Hennegau. Zealand và Friesland cũng thuộc sở hữu của bá tước này. Từ cuộc hôn nhân này họ có các người con: Margarete (1325-1360 / 1374), Anna (khoảng 1326-1361), Elisabeth (1324 / 1329-1401 / 1402),. Ludwig VI (1328 / 1330-1364 / 65), William I (1330-1388 / 1389), Albrecht (1336-1404), Otto V. (1341 / 1346-1379), Beatrix (1344-1359), Agnes (1345-1352) và Ludwig (1347- 1348).[39]

Một cuộc tranh cãi về luật pháp kéo dài cả thập kỷ giữa dòng Hiệp sĩ Teuton và Ba Lan thúc đẩy lãnh tụ của dòng Dietrich von Altenburg cuối thập niên 1330 kiếm sự yểm trợ của vương quốc. Ludwig nắm lấy cơ hội với sự giúp đỡ của dòng này để gia tăng thế lực của đế quốc ra khỏi biên giới phía đông bắc. Con trai thứ của ông Ludwig VI, được gọi là "người La Mã", kết hôn với công chúa Ba Lan Gwendolyn. Do đó Ba Lan có quan hệ gần gũi với vương quốc. Trong tháng 11 năm 1337 Hoàng đế giao cho dòng Hiệp sĩ Teuton Litva, mà không thuộc về vương quốc. Nếu chiến dịch của Dòng mang lại thành công, lợi nhuận sẽ thuộc về dòng này và chủ quyền của Lithuania sẽ được trao cho đế quốc. Trong tháng 3 năm 1339 Ludwig đòi lãnh tụ của dòng, tấn chiếm thành phố và giáo phận Reval và Estonia. Trong thỏa hiệp hòa bình của Kalisz trong năm 1343 những tranh cãi giữa Ba Lan và Hiệp sĩ Teuton đã được giải quyết. Yêu cầu của dòng được vương quốc bảo vệ chống lại Ba Lan không còn cần thiết nữa, do hoàng đế đã mất đi một áp lực.[40]

Một vài công tước (Pomerania-Stettin, Jülich, Geldern) được Ludwig nâng chức tước. Việc Ludwig giao cho con trai mình lãnh thổ Mark Brandenburg dẫn đến xung đột bạo lực với các bá tước Pomerania. Pomerania lúc đó lại được coi là đất của Brandenburg. Trong tháng 8 năm 1338 công tước Otto và con ông Barnim III, cùng cai trị Pomerania-Stettin, không còn bị sắp xếp thuộc Mark Brandenburg nữa mà chịu trách nhiệm trực tiếp ngôi vua. Anh em trai của Otto, bá tước Wilhelm von Jülich được Ludwig trong năm 1336 tăng chức hầu tước và trong năm 1338 nguyên soái đế quốc. Bá tước Rainald II von Geldern 1339 được phong tước công tước.[41] Tổ chức chính trị mới của Ludwig ở phía đông bắc đế quốc có giá trị cả đến thế kỷ 15.[42]